Java String.split 内存泄漏?
全部标签 我们有一个应用程序在5个(服务器)节点(16个内核,每个128GB内存)上运行,每台机器上加载近70GB的数据。该应用程序是分布式的并为并发客户端提供服务,因此,套接字使用量很大。同样,对于多线程之间的同步,也使用了一些同步技术,主要使用System.Threading.Monitor。现在的问题是,当应用程序正在运行并且数据在这些服务器节点之间以及客户端和服务器之间传输时,即使有40+%的内存,一两台服务器机器开始接收OutOfMemoryException仍然可用。我们感觉这个异常来自非托管代码。尽管我们没有直接进行任何非托管调用,但我们已经看到OOM异常堆栈跟踪中的最后一次调用始
我习惯于在监window口中使用的一个特殊功能是变量的内存地址。IIRCVisualStudio为C++做这个(我知道QtCreator/Eclipse做)。有没有一种简单的方法可以在VisualStudio中为C#程序执行此操作?任何帮助将不胜感激。谢谢,杰斯 最佳答案 放置一个调试点,启动您的应用程序,当该调试点被击中时,转到调试->Windows->内存Address文本框类型,变量名,你就能看到地址。VisualStudio2012中的快捷键显示为CTRL+ALT+M,1 关于c
我正在使用Dictionary存储图像中颜色出现的频率,其中键是颜色(作为int),值是颜色在图像中出现的次数。当我处理更大/更彩色的图像时,这本词典会变得非常大。我在大约6,000,000个条目时遇到内存不足异常。这是在32位模式下运行时的预期容量吗?如果是这样,我能做些什么吗?有哪些替代方法可以跟踪这些不会耗尽内存的数据?作为引用,下面是循环遍历位图中的像素并将频率保存在Dictionary中的代码:Bitmapb;//=something...Dictionarycount=newDictionary();System.Drawing.Colorcolor;for(inti=0;
我想阅读大TXT文件,大小为500MB,首先我使用varfile=newStreamReader(_filePath).ReadToEnd();varlines=file.Split(new[]{'\n'});但它抛出内存异常,然后我尝试逐行读取,但在读取大约150万行后再次抛出内存异常using(StreamReaderr=newStreamReader(_filePath)){while((line=r.ReadLine())!=null)_lines.Add(line);}或者我用过foreach(varlinFile.ReadLines(_filePath)){_lines.A
如何在不将整个文件加载到内存的情况下读取任意文件并“逐个”处理它(意思是逐字节或其他可以提供最佳读取性能的block大小)?处理的一个例子是生成文件的MD5散列,尽管答案可以适用于任何操作。我想拥有或编写这个,但如果我可以获得现有代码,那也很棒。(c#) 最佳答案 下面是一个示例,说明如何在不将整个内容加载到内存的情况下以1KB的block读取文件:constintchunkSize=1024;//readthefilebychunksof1KBusing(varfile=File.OpenRead("foo.dat")){intb
有什么方法可以将字符串("abcdef")转换为包含其字符的字符串数组(["a","b","c","d","e","f"])而不使用String.Split函数? 最佳答案 所以你想要一个string的数组,一个char每个:strings="abcdef";string[]a=s.Select(c=>c.ToString()).ToArray();这是有效的,因为string工具IEnumerable.所以Select(c=>c.ToString())每个项目char在string到string代表char和ToArray枚举投影
当实现一个旨在线程安全的类时,我是否应该在其构造函数的末尾包含一个内存屏障,以确保任何内部结构在它们可以被访问之前已经完成初始化?还是消费者有责任在使实例对其他线程可用之前插入内存屏障?简化问题:由于在线程安全类的初始化和访问之间缺少内存屏障,下面的代码中是否存在可能导致错误行为的竞争危险?或者线程安全类本身应该防止这种情况发生吗?ConcurrentQueuequeue=null;Parallel.Invoke(()=>queue=newConcurrentQueue(),()=>queue?.Enqueue(5));请注意,程序不入队是可以接受的,如果第二个委托(delegate)
就在前几天,我正在调查一个内存泄漏问题,该问题使应用程序在两分钟内从~50MB膨胀到~130MB。原来问题出在ConcurrentQueue上类(class)。在内部,该类存储数组的链接列表。当一个项目从ConcurrentQueue中出队时,数组中的索引会发生变化,但该项目仍保留在数组中(即它未设置为空)。整个数组节点在足够多的入队/出队后被丢弃,因此从技术上讲这不是泄漏,但如果将大型对象放入ConcurrentQueue中,这可能会很快失控。文档没有说明这种危险。我想知道基类库中还有哪些其他潜在的内存陷阱?我知道Substring一个(也就是说,如果您调用substring并保留结
我目前正在开发一个网站,该网站大量使用缓存数据来避免往返。在启动时,我们得到一个“大”图(数百种不同类型的对象)。这些对象通过WCF检索并反序列化(我们使用ProtocolBuffer进行序列化)我正在使用redgate的内存分析器来调试内存问题(内存似乎不适合我们在完成初始化并最终得到这份报告后“需要多少内存”现在我们可以从这份报告中收集到的是:1).NET分配的大部分内存是空闲的(它可能在反序列化期间被正确分配,但现在它是空闲的,我希望它返回操作系统)2)内存碎片化(这很糟糕,因为每次我刷新现金时我都需要重做内存饥饿的反序列化过程,这反过来会创建大对象,由于碎片化可能会抛出OutO
我目前正在使用二进制格式化程序(Remoting)序列化和反序列化对象以便在我的LAN中发送。我最近从2.0升级到.NET3.5。3.5是否引入了任何新类型来提高序列化性能?我查看了DataContractSerializer,但它会将任何内容序列化为底层XML权利……这肯定会增加内存占用量。通过LAN发送对象最快的序列化程序是什么?我不关心互操作或版本控制......我需要速度!我对第三方开源替代方案持开放态度。 最佳答案 听起来像ProtocolBuffers可能正是您要找的。我知道三种.NET实现:protobuf-net,p